La costruzione, voluta dai Medici, ebbe inizio il 30 giugno 1569, ma la sistemazione definitiva dell'imponente fortilizio si deve a Bernardo Buontalenti che portò a compimento l'impresa probabilmente nell'ultimo decennio del '500